Derrick Giscloux

C’est véritablement une joie et une motivation importante de se voir mettre à disposition le plateau du Museolab 3 d’Erasme afin d’expérimenter, pendant une semaine le système de capture du mouvement sans contact que nous avons mis au point avec Yves Quéméner et la spatialisation par ambisonie développée avec Alexandre Rocca. Les liens renvoient vers la maquette du projet, pas un produit fini …

L’oeuvre qui utilise ces dispositifs est présentée à la scène nationale du Lux à Valence en janvier 2012: la « Nuit Electronique » .

Fany Buy s’occupe ici de la médiation avec les publics et c’est la raison de sa présence parmi mon équipe, que j’envisage durable: avec son talent et son sens du contact humain faire l’interface entre l’oeuvre et les visiteurs, les guider à travers les interactions possibles offertes par les jeux que l’oeuvre permet est exactement le maillon manquant à mon travail.

Ce projet est ambitieux à plusieurs titres: de part les technologies que nous mettons en oeuvre et l’esprit que nous y mettons: l’ensemble des logiciels que nous développons seront placés en Open Source d’ici peu (sur cette page) et notamment ce navigateur cinématique que nous avons intitulé « Natural Navigator ».

Un sincère merci à Yves-Armel Martin, directeur du centre Erasme, pour me permettre cette étape de travail dans des conditions idéales. Un merci également à Thomas Escure, régisseur général du muséolab pour sa grande disponibilité.

Centre Erasme: http://www.erasme.org/

La Nuit Electronique est une oeuvre co-produite par la scène nationale du Lux et la scène conventionnée des Abattoirs (Bourgoin-Jallieu).

Le navigateur cinématique consiste à utiliser son propre corps dans l’espace pour naviguer dans un univers en 3D.

Tel un joystick vivant, l’utilisateur peut, grâce aux mouvements de ses bras et les postures de son corps réaliser un contrôle avancé des points de vue et des modes de déplacement au sein d’un environnement simulé.

La technologie est développé au sein du Studio CreArtCom, par Yves Quéméner. Nous n’utilisons pas de reconnaissance de profile du corps humain mais un suivi des mouvements tout à fait différent, qui ne nécessite aucun calibrage: pas besoin de prendre une posture idiote pendant 1 minute pour que le système reconnaisse l’utilisateur. La reconnaissance est une extension de ce que nous avions produit pour le Sp.Hack Invaders en mars 2011

Yves à créé une maquette d’environnement 3D en openGL afin de tester le contrôle du corps sur le déplacement dans cet environnement, grâce à cette navigation corporelle:

http://creartcom.free.fr/nuit/5.navigateur.html

Philosophie, Démarche et Enjeux

Avec  les perspectives de généralisation des systèmes de captation gestuels en 3 dimensions, dont le premier paradigme grand public a vu tout récemment le jour avec la sortie de la caméra kinect de Microsoft,  la simulation d’environnement franchit un nouveau seuil.

C’est un pan gigantesque des domaines qui s’appuient sur la représentation de mondes virtuels qui sont concernés.

L’industrie du jeu vidéo, les domaines du spectacle et de la création, ceux de l’architecture et de l’urbanisme, sont directement concernés par les environnements immersifs et donc par la nécessité de s’y mouvoir.

Tandis que l’outil de base était encore il y a peu le contrôleur à main (type souris, joypad ou plus récemment touch-tablet) la vision par ordinateur est sur le point d’offrir des possibilités inégalées par les précédentes IHM. Il ne serait sans doute pas présomptueux de considérer que les perspectives de la vpo 3D sont au multitouch, ce que lui-même était comparé à la souris et que dans ce domaine, le vide (pour le moment) fait office de référence.

Objectif Général

L’objectif du projet de recherche est d’aboutir à un contrôle évolué d’environnements réalisés en images de synthèse.

Cette recherche autour des capacités de navigation représente un apport qualitatif à des projets où le déplacement subjectif, le point de vue, la visualisation en trois dimensions sont absolument nécessaires.

La première application de cette technologie sera présentée lors d’une création que je présente au Lux Valence le 21 janvier 2011 dans le cadre du festival Emergence, dans l’une des salle de cinéma du Lux. L’oeuvre est a mi-chemin entre performance et dans un second temps installation ouverte au public.

Vous aimeriez partager votre projet, un aspect de votre travail ou de votre passion, ouvrir le capot, faire visiter l’arrière-cuisine … et tout simplement échanger avec d’autres autour d’un verre, vous faire de nouveaux amis et créer des liens dans une communauté de pratiques locales?

L’apéro Codelab c’est LE moment pour des propositions expérimentales et le croisement des univers différents (musique / plastique / hack / …)

Evénement à accès gratuit autour de la facture numérique, du logiciel et du code créatifs, les apéros Codelab sont un format de rencontres ouvertes, libres et indépendantes qui ont lieu dans plusieurs ville de France et où il est possible de présenter un travail et ses coulisses, une installation et ses aspects techniques, un moment de monstration, le partage d’une découverte ou d’une technique ou un projet en cours.

Pour cette 13ème édition des apéros Codelab, et une toute première à Lyon, Metalab et ses partenaires: P5-Lyon, Oli_Lab, Studio CreArtCom vous proposent de vous joindre à cette rencontre amicale, comme auditeur ou participant.

infos/web:

Par Metalab, post original: http://metalabartsnumeriques.wordpress.com/projets-2012/aperos-codelab/

Créé à Nantes par les principaux acteurs de la programmation dans le domaine artistique, Codelab est un forum consacré aux pratiques expérimentales de création d’image, de vidéo, de son et de musique qui utilisent des langages de programmation. Ce forum francophone, de partage d’idées et d’entraide ouvert à ceux qui utilisent ces techniques et à ceux qui souhaitent les découvrir*.

A l’instar de ce qui se fait sur Nantes et afin d’encourager l’émulation collective des esprits créatifs en matière d’arts numériques sur l’agglomération lyonnaise, MetaLab propose régulièrement des apéros informels permettant l’échange de pratiques, la dynamisation du réseau ainsi que la mise en place d’ateliers et formations par les pairs.

* http://codelab.fr

La kinect est constituée de deux capteurs. le capteur RGV est une caméra normale à la résolution 640×480, l’autre capteur, dit « de profondeur » est un télémètre constitué d’une série de faisceaux infra-rouges. Le système interne de la kinect calcul donc le temps parcouru par l’infrarouge pour déterminer la distance de l’objet ou du sujet et donc la profondeur de champ.

Ce problème de la distance est un vrai problème avec la kinect mais à ce prix-là il ne faut pas en attendre d’immenses performances, ce qui reste assez paradoxal avec le fait que l’on est tout de même dans une haute technologie, qui trouve son origine initiale dans des applications militaires (voir plus bas mon développement sur la société PrimeSense).

D’après nos tests au studio la caméra capte jusque 8 mètres péniblement, à 5 mètres ça reste exploitable, l’idéal est entre 1m50 et 3m50 max.

Ce problème de la distance avec la kinect est très bien expliqué ici par Jean-Marc Pelletier: http://cycling74.com/forums/topic.php?id=29987

En quelques mots Kinect est la réponse à la Wii MotionPlus de Nintendo et à la Move de Sony (PlayStation). Bien auparavant Sony avait commercialisé la caméra EyeToy qui permettait également de jouer à des jeux grâce à des procédés de détection de mouvement.

2.5 million d’unités ont été vendues au premier mois de commercialisation.

La kinect tient sa technologie de la société israélienne PrimeSense.

Cette de technologie, dite de Z-Cam ou caméra de profondeur est un peu le graal de la robotique, qu’elle soit militaire ou civile.

Il est très probable que primesense ait tenté de répondre à des projets militaires avec ce capteur. Toutefois, il est relativement mauvais pour un capteur robotique (mais incroyablement peu cher!).

Il est reès probable qu’avec le succès de la kinect, ils se soient totalement repositionnés sur le loisir et le jeu vidéo, comme semble l’atteste leur site:

http://www.primesense.com/#3

Suite au succès de la kinect Primesense à créé une NPO, OpenNI pour « Open Natural Interface » qui à pour objectif de promouvoir les dispositifs et les applications qui reposent sur les procédés de vision de la kinect.

A ce titre ils ont publié un SDK qui permet d’exploiter une partie des capacités de détection de mouvement de leur capteur. Ce projet donne des outils aux développeurs mais le code source n’est en partie pas livrée, c’est juste un environnement de développement:

http://www.openni.org/

En revanche il essaient de fédérer une communauté en proposant aux créateurs de projets de toutes natures (jeux, arts) de publier leurs sources selon un guide de directives et une « charte ». Certains ici ont peut-être reçu un courrier d’OpenNI dans ce sens.

Un objet [jit.openni] pour windows repose sur cette librairie

http://cycling74.com/forums/topic.php?id=34020

Par ailleurs un autre projet, en code source ouvert celui-ci s’est lancé par la communauté, OpenKinect:

http://openkinect.org/wiki/Main_Page

L’objet [jit.freenect.grab] pour Mac

http://jmpelletier.com/freenect/ est basé sur la librairie Libfreenect qui est issue du projet OpenKinect. Nombre d’objets ou librairies dans d’autres environnements reposent sur cette librairie véritablement ouverte et collaborative. D’autres ont choisi OpenNI.

Quelques autres sources

• applications de calibrage très complète pour Linux, Mac, Windows

http://nicolas.burrus.name/index.php/Research/KinectRgbDemoV6?from=Research.KinectRgbDemoV5

• estimation de posture

TOHM JUDSON a posté un tutoriel pour relier OpenNI à Max en OSC pour faire du « Skeleton tracking »

http://tohmjudson.com/?p=30

C’est un peu fastidieux car il y a pas mal de chose à installer via le terminal mais c’est très bien expliqué et ça fonctionne bien.

J’ai réalisé un test ici:

http://www.youtube.com/user/Derrgis#p/u/8/F6KHGFOknvc

Il y aussi un développeur qui tout récemment a créé SYNAPSE, une application Mac qui envoie la position des parties du corps à Max, Quartz Composer ou même Live: http://synapsekinect.tumblr.com/post/6307790318/synapse-for-kinect

Pour Vernor Vinge, c’est la création d’une intelligence artificielle supérieure à l’intellect humain qui sera l’avancée technologique qui précipitera la singularité. Dans le numéro d’IEEE Spectrumconsacré au sujet, Vernor Vinge revient sur sa prédiction, pour nous montrer les scénarios possibles – scénarios qui ont tous en commun l’idée d’une multiplication des capacités cognitives :

• Le scénario de l’intelligence artificielle, le plus classique : une créature artificielle voit le jour et nous mène vers un avenir inconnu.
• Le scénario de l’intelligence augmentée : grâce à l’explosion des interfaces directes entre le cerveau et la machine, nous devenons capables d’accroitre nos capacités mentales de façon considérable.
• Le scénario biomédical : cette fois, c’est par l’usage des neurosciences et la modification de la structure de notre cerveau que nous accédons à ce stade supérieur.
• Le scénario internet : l’explosion des techniques de communication et d’information crée de fait une intelligence collective.
• Le scénario de “Gaïa numérique” : assez proche du précédent, il s’agit encore de la création d’une entité collective superintelligente, accouchée cette fois-ci par “l’internet des objets”, la multiplication décentralisée des outils de traitement de l’information.

On voit bien dans cette énumération, que malgré quelques variations, Vinge s’en tient à une certaine définition de la Singularité. N’importe quel progrès scientifique, même le plus spectaculaire (développement des nanotechnologies, abolition du vieillissement ou de la famine par la biotechnologie, colonisation de l’espace, etc.) ne suffit pas pour produire une singularité. Dans la Singularité, c’est bel et bien la variable “intelligence” qui devient infinie.

Pour Vinge, la Singularité ne se définit donc pas seulement comme une accélération du progrès scientifique et technique, mais comme l’accélération du facteur même qui permet cette accélération. C’est logique. Si nous (ou nos créations) arrivons à augmenter nos facultés cognitives, l’une des premières tâches auxquelles nous nous attèlerons sera de les booster encore plus, et ainsi de suite.

la suite sur « Prochain arrêt, la Singularité (2/4) : L’intelligence artificielle est-elle la clé de la Singularité ? » / Internetactu.net

La programmation informatique peut s’entendre comme un ensemble interminable d’instructions sur un écran ou comme le langage qui permet aux choses de fonctionner. Mais, depuis quelques années,une révolution dans le domaine de la création visuelle et sonore s’est produite, influençant spécialistes et débutants et s’étendant à l’ensemble des disciplines créatives : de nouveaux langages ont apparus, permettant aux utilisateurs de programmer facilement et de créer leurs propres oeuvres numériques.

Cette révolution commence donc par deux mots : Hello World. Les deux premiers mots que tout programmeur écrit sur son écran.

HELLO WORLD est donc également le titre d’une série documentaire sur trois langages ouverts de programmation qui contribuent à cette révolution.

http://helloworlddocus.wordpress.com/